Perf分析CPU性能问题笔记

本文仅仅是一个笔记。

场景

观察进程的CPU使用情况

观察进程内各个函数的CPU使用情况：

sudo perf top -p <pid>

同时显示函数调用链：

sudo perf top -g -p <pid>

记录采样结果，以供后续分析，加上-g会记录调用链：

sudo perf record -g -p <pid>

读取采样结果：

sudo perf report

观察容器内进程CPU使用情况

容器内的进程实际上可以在host machine上看到，ps -ef | grep <text>可以找得到。

因此同样可以用perf top -p <pid>观察，但是会出现无法显示函数符号的问题，注意观察perf top最下面一行：

Failed to open /opt/bitnami/php/lib/php/extensions/opcache.so, continuing without symbols

解决办法是先用perf record记录采样数据，然后将容器内文件系统绑定到host上，然后用perf report --symfs <path>指定符号目录。你得先安装bindfs（下面有安装方法）。

mkdir /tmp/foo
PID=$(docker inspect --format {{.State.Pid}} <container-name>)
bindfs /proc/$PID/root /tmp/foo
perf report --symfs /tmp/foo

# 使用完成后不要忘记解除绑定
umount /tmp/foo/

把上面的<container-name>改成你要观察的容器名。

观察Java进程的CPU使用情况

你得要先安装perf-map-agent（下面有安装方法），在启动Java进程的时候添加-XX:+PreserveFramePointer参数，下面是几个用法：

• perf-java-top <pid> <perf-top-options>
• perf-java-record-stack <pid> <perf-record-options>
• perf-java-report-stack <pid> <perf-report-options>

更多用法见官网说明。

还可以使用perf-java-flames <pid> <perf-record-options>生成火焰图，你得先安装FlameGraph（下面有安装方法）。关于火焰图的解读看netflix的这篇博客。

观察容器内Java进程CPU使用情况

目前没有办法。

附录：安装方法

下面讲的都是在Ubuntu 16.04系统上的安装方法。

perf

安装perf

$ sudo apt install -y linux-tools-common

运行perf会出现：

$ perf
WARNING: perf not found for kernel 4.4.0-145

  You may need to install the following packages for this specific kernel:
    linux-tools-4.4.0-145-generic
    linux-cloud-tools-4.4.0-145-generic

  You may also want to install one of the following packages to keep up to date:
    linux-tools-generic
    linux-cloud-tools-generic

于是安装：

sudo apt install linux-tools-4.4.0-145-generic linux-cloud-tools-4.4.0-145-generic linux-cloud-tools-generic

bindfs

到bindfs官网下载源码包（本文写是版本为1.13.11）。

先安装编译需要的工具：

sudo apt install -y cmake pkg-config libfuse-dev libfuse2 autoconf 

解压缩源码包，进入bindfs目录，编译：

./configure && make && sudo make install

perf-map-agent

到github clone perf-map-agent的源码仓库。

安装JDK，你之后要监测的程序都得用这个JDK启动，这个JDK也用来编译perf-map-agent。用apt安装openjdk的方法见下面。

编译：

cmake .
make

# will create links to run scripts in /usr/local/bin
sudo bin/create-links-in /usr/local/bin

安装openjdk

sudo apt-get install -y openjdk-8-jdk

通过这种方式安装是没有JAVA_HOME环境变量的，因此我们要自己设置一个，查找openjdk的安装路径：

dpkg-query -L openjdk-8-jdk

将发现结果写到~/.bashrc里：

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

FlameGraph

到github clone FlameGraph的源码仓库。

到~/.bashrc设置环境变量：

export FLAMEGRAPH_DIR=<path-to-flame-graph>